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(57) Abstract: The invention relates to a method for experimental design comprising the following steps: A selection of at least 
one first experiment from an experiment range by a data-driven optimizer, B input of data for the first experiment that has been 
determined by experimentation, C use of a meta-layer for evaluating the experiment data, whereby the meta-layer contains a neuronal 
network and/or a hybrid model and/or a rigorous model and/or a data mining method, D input of the experiment data determined by 
experimentation for the first experiment into the data-driven optimizer, E influencing of the data-driven optimizer by the result of 
the evaluation, F selection of at least one second experiment from the experiment range by the data-driven optimizer. 

! 

(57) Zusammenfassung: Die Erfindung betrifft ein Verfahren zur Planung von Versuchen mit folgenden Schritten:A. Auswahl von 
zumindest einem ersten Versuch aus einem Versuchsraum durch einen datengetriebenen Optimierer, B. Eingabe von experimentell 
ermittelten Versuchsdaten des ersten Versuchs, C. Verwendung einer Meta-Schicht fur die Auswertung der Versuch sdaten, wobei 
die Meta-Schicht ein neuronales Netz und/oder ein Hybridmodell und/oder ein rigoroses Modell und/oder eine Data Mining Me- 
thode beinhaltet, D. Eingabe der experimentell ermittelten Versuchsdaten des ersten Versuchs in den datengetriebenen Optimierer, 
E. Beeinflussung des datengetriebenen Optimierers durch das Ergebnis der Auswertung, F. Auswahl von zumindest einem zweiten 
Versuch aus dem Versuchsraum durch den datengetriebenen Optimierer. 



WO 03/087957 



PCT/EP03/03424 



- 1 - 

Verfahren und Computersystem zur Planting von Versuchen 

Die Erfindung betrifft ein Verfahren und ein Computersystem zur Planung von Ver- 
suchen sowie ein entsprechendes Computerprogrammprodukt. 

Aus dem Stand der Technik ist es bekannt, Versuche mittels statistischer Ver- 
suchsplanungsverfahren zu planen. Solche Pianungsverfahren werden unter anderem 
dazu benutzt, mit einer minimalen Anzahi von Versuchen ein empirisches 
Prozessmodell fur den Zusammenhang zwischen den Regel- und StorgroBen in 
einem Prozess und den resultierenden Produkt- land Prozesseigenschaften zu er- 
mitteln. Eine solche statistische Versuchsplanung lasst sich beispielsweise mit Hilfe 
des Computerprogramms „STAVEX" (STAtistische Versuchsplanung mit EXperten- 
system, Hersteller AICOS Technologie, Schweiz) durchfuhren. Ein weiteres 
kommerziell erhaltliches Computerprogramm fur die Versuchsplanung ist das 
Programm „Statistica®", der Fa. StatSoft (Europe) GmbH, Deutschland. 

Im Bereich der statistischen Versuchsplanung werden im Stand der Technik ver- 
schiedenei Versuchsplanungstypen unterschieden. Insbesondere unterscheidet man 
zwischen der klassischen, vollfaktoriellen Methode und modernen Verfahren nach 
Taguchi oder Shainin. 

Die klassische, vollfaktorielle Methode ist der Ursprung aller statistischen Ver- 
suchsplanungsmethoden. Sie basiert auf einem Vergleich aller qualitatsbedingenden 
Faktoren miteinander in Anlehnung an die Varianzanalyse. Zahlreiche Varianten 
wurden im Laufe der vergangenen Jahrzehnte erarbeitet und in Forschungs- imd Ent- 
wicklungslabors validiert. 

t 

Das Shainin-DOE (DOE = Design of Experiment) gilt als geeignetes Verfahren fur 
die Prozessoptimierung, weil es sogenannte „starke" EinflussgrdBen isoliert imd 
diese axif Relevanz und Abhangigkeit untersucht. 
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Das Taguchi-DOE basiert auf vorangegangenen, teilfaktoriellen, orthogonalen 
Versuchsplanen. Wegen der drastischen Versuchslaufeinsparungen durch Voraus- 
waM der wichtigsten EinflussgrSBen handelt es sich hierbei urn ein schnelles und 
relativ wirtschaftliches Verfahren der Versuchs- und Prozessplanung. 

Weitere bekannte statistische Versuchsplanungstypen sind teilfaktorielle Versuchs- 
plane ("fractional factorial"), Plackett-Burmann Versuchsplane, Zentral-zusammen- 
gesetzte Plane („central composite"), Box-Behnken Versuchsplane, D-optimale Plane 
(„D-optimal Designs"), Mischungsplane, Balancierte Blockplane, Lateinische 
Quadrate, Desperado Plane (vgl. hierzu auch Eberhard SchefHer, Statistische 
Versuchsplanung and -auswertung; Deutscher Verlag fur Grundstofiindustrie, 
Stuttgart, 1997). 

Weitere Versuchsplanungsverfahren sind bekannt aus Hans Bendemer, „Optimale 
Versuchsplanung", Reihe Deutsche Taschenbucher (DTB, Band 23, und ISBN 
3-87144-278-X) sowie Wilhelm Kleppmann, Taschenbuch Versuchsplanung, 
„Produkte und Prozesse optimieren" 2., erweitere Auflage, ISBN: 3-446-21615-4. 
Diese Verfahren werden in der Praxis aus Kostengriinden oftmals eingesetzt. 

Nachteilig bei bekannten statistischen Versuchsplanungsverfahren ist, dass die Ver- 
suchsplanung und Modellierung ohne Berucksichtigung von zusatzhchem Wissen 
erfolgt, so dass u.U. keine geeigneten Optima gefiinden werden und die Vertrauens- 
wiirdigkeit der generierten Ergebnisse und Aussagen fragwiirdig ist. Ein weiterer 
. gewichtiger Nachteil von vorbekannteh Versuchsplanungsverfahren ist, dass diese 
bei einer groBen Zahl zu beriicksichtigender Einflussgr6Cen zu umfangreich werden. 
Ferner ist bei bestimmten Systemen z.B. in der Katalyse oder Wirkstoffforschung 
oftmals die Zielfunktion stark „zerkluftet" und deshalb schwer mit statistischen 
Verfahren fassbar. 
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Aus der WO 00 / 15341 ist ein Verfahren zur Entwicklung von Feststoffkatalysatoren 
fur heterogene katalysierte Reaktionsablaufe bekannt, welches auf einer paralleli- 
. sierten Auspriifung nach evolutionSren Methoden basiert. 

Entsprechende evolutionar arbeitende Verfahren sind femer bekannt aus der WO 
00/43411, J. chem. Inf. Compute. Sci. 2000, 40, 981-987 heterogeneous Catalyst 
Design Using Stochastic Optimization Algorithms" sowie aus Applied Catalysis A: 
General 200 (2000) 63-77 „An evolutionary approach in the combinatorial selection 
and optimization of catalytic materials". 

Ferner ist aus der US 6,009,379 ein Verfahren zur Steuerung eines Herstellungs- 
prozesses iiber ein effizientes experimentelles Design bekannt. Dabei werden Ver- 
suchs-Punkte gleichmaBig auf einer mehrdimensionalen Kugeloberflache verteilt, urn 
die einzelnen Herstellungsparameter gleichmaBig zu gewichten. 

Die Figur 1 zeigt ein Blockdiagramm eines aus dem Stand der Technik bekannten 
Systems zur Durchfiihrung von Screening Versuchen, wie es insbesondere in den 
Bereichen Katalyse, Material- und Wirkstoffforschung eingesetzt wird. Das System 
beinhaltet eine Substanzbibliothek, das heiBt eine sogenannte kombinatorische 
Library 1 und einen Versuchsaufbau 2 zur Durchfuhrung von High-Throughput- 
Screening (HTS) oder High-Speed Experimentation (HSE) Versuchen. Solche 
Screening Versuche werden typischerweise fiir die WirkstofBdentifizierung, die 
Katalyseforschimg (homogen und heterogen), die Materialsforschung sowie die 
Identifizierung von optimalen Reaktionsbedingiuigen bei chemischen, biochemischen 
oder biotechnologischen Systemen eingesetzt. 

Oblicherweise werden in einem solchen Versuchsaufbau 2 mehrere Versuche parallel 
durchgefuhrL Die Versuchsergebnisse werden in Form einer Datei 3 ausgegeben. 
Diese Ausgangsdaten oder Teile davon sind zugleich die Eingangsdaten fiir einen 
Optimierer 4. 
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Bei dem Optimierer 4 handelt es sich um einen sogenannten Black-Box-Optimierer, 
das heiBt ein Optimierer, der auf einem datengetriebenen Modell oder auf einem 
evolutionaren Algorithmus basiert. A priori Wissen iiber Struktur und/oder 
Wirkungsbeziehungen sind in dem Optimierer 4 nicht vorhanden, vielmehr be- 
schrankt sich dieser auf die Auswertung der Daten als solchen, um eine Auswahl von 
Versuchen aus der kombinatorischen Library 1 zu treffen. 

Typischerweise verwendet der Optimierer 4 die Versuchsdaten 3 bestehend aus 
Einflussgrt>Ben (Attribute, Faktoren, Strukturmerkmale, Deskriptoren, physikalische 
GrfiBen, Stoffeigenschaften) und einer Angabe hinsichtlich der Wirkung dieser 
GrSBen auf die sogenannten Targets (ZielgroBen), um eine optimale Suchrichtung im 
Raum der Targets festzulegen. 

Die Realisierung eines solchen Biack-Box-Optimierers 4 erfolgt beispielsweise iiber: 

genetische Algorithmen, 
. evolutionare Algorithmen oder Strategien, 
neuronale Netze oder 

sonstige datengetriebene Modellansatze, die auf stochastische oder 
deterministische oder aus beiden kombinierte Optixxiierungsstrukturen zuriick- 
greifen. 

Ein gemeinsamer Nachteil von solchen aus dem Stand der Technik bekannien 
Systemen ist, dass a priori Informationen nicht oder nur eingeschrankt in den Black- 
Box-Optimierer 4 Einfluss finden konnen und entsprechende Suchstrategien oft 
langsam oder gegen ungeeignete Suboptima konvergieren. Solche aus dem Stand der 
Technik bekannte Verfahren sind daher hinsichtlich des Zeit- und Kostenaufwands 
oft inefBzient. Bei Techniken auf der Basis von evolutionaren Algorithmen be^teht 
ferner die Gefahr, dass der Aufwand beim Einsatz des Optimierers zur Erreichung 
des Optimums h6her sein kann als bei einem rationalen oder statistischen Vorgehen. 
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Der Erfindung liegt daher die Aufgabe zu Grunde ein verbessertes Verfahren zur 
Planung von Versuchen sowie ein entsprechendes Computersystem und Computer- 
programmprodukt zu schaffen. 

Die der Erfindung zu Grunde liegende Aufgabe wird mit den Merkmalen der unab- 
hangigen Patentanspriiche jeweils gelost. Bevorzugte Ausfuhrungsformen der 
Erfindung sind in den abhangigen Patentanspriichen angegeben. 

Gegenstand der Erfindung ist ein Verfahren zur Planung von Versuchen zur Er- 
reichung eines Optimierungszieles mit folgenden Schritten: 

A) Auswahl von zumindest einem ersten Versuch aus einem Versuchsraum 
durch einen datengetriebenen Optimierer in einer Rechnereinheit, 

B) Eingabe von experimentell ermittelten Versuchsdaten des ersten Versuchs, in 
mindestens eine Meta-Schicht in eine Rechnereinheit, 

C) Verwendung mindestens einer Meta-Schicht ftir die Auswertung der 
Versuchsdaten, 

D) Eingabe der experimentell ermittelten Versuchsdaten des ersten Versuchs in 
den datengetriebenen Optimierer, 



E) Beeinflussung des datengetriebenen Optimierers durch das Ergebnis der 
Auswertung in der Meta-Schicht und Priifimg der Zielerreichung, 

F) Auswahl von zumindest einem zweiten Versuch aus dem Versuchsraum, 
durch den datengetriebenen Optimierer, , 

G) Wiederholung der Schritte B) bis E) fur die Daten des zweiten Versuchs 
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und 

H) Abbruch der Hexation bei Zielerreichung oder Wiederholung der Schritte A) 
bis F) fur mindestens einen dritten oder weitere Versuche bis zur Ziel- 
erreichung. 

Das Verfahren wird wiederholt bis das Optimierungsziel erreicht ist oder festgestellt 
wird, dass das Optimierungsziel moglicherweise nicht erreicht werden kann. Der Ab- 
bruch des Verfahrens kann automatisch oder durch den Benutzer erfolgen. 
Optimierungsziel k6nnen das Erreichen bestimmter Bewertungskennzahlen der Ver- 
suche sein. Bei den Kennzahlen kann es sich beispielsweise um Ausbeuten Selektivi- 
taten, Raum-Zeit-Ausbeuten, Kosten, physikalische Eigenschaften, Wirkmechanis- 
men, abgeleitete Eigenschaften usw. handeln. Eine Bewertung der Versuche unter 
Verwendung mehrerer Kennzahlen ist ebenfalls moglich. 

Die Erfindung erlaubt die Integration von Wissen zur Beeinflussung des Black-Box- 
Optimierers mit dem Ziel der Beschleunigung der Konvergenz und/oder der Sicher- 
stellung der Konvergenz zu einem geeigneten Optimum sowie einer Steigerung der 
Vertrauenswurdigkeit der Ergebnisse. Das Wissen kann dabei als.Vorwissen a priori 
bekannt sein und/oder laufend durch die Auswertung von zuvor durchgefiihrten 
Versuchen erganzt werden. 

Die Generierung von zusatzlichem Wissen erfolgt dabei vorzugsweise in Form von 
„Regeln", insbesondere iiber die Struktur-Wirkungsbeziehung mit Data Mining und 
anderen Verfahren. Diese Regeln konnen vor, wahrend oder nach einem Optimie- 
rungsschritt oder auch fortlaufend in die Versuchsplanung integriert werden, wobei 
der datengetriebene Optimierer entsprechend beemflusst wird. Fur diese Beein- 
flussung des datengetriebenen Optimierers ist eine Meta-Schicht vorgesehen. , 
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Durch Einsatz einer solchen Meta-Schicht wixd der Black-Box-Optimierer 
„getuned". Dabei ist die Meta-Schicht nicht auf eine Methode beschrSnkt, sondern 
kann die Kombination verschiedener Methoden beinhalten. Mogliche Methoden sind: 



Hybridmodell, 
rigorose Modelle, 

Data Mining Methoden, wie zum Beispiel Entscheidungsbaumverfahren, 
allgemeine Separationsverfahren, Untergruppensuchverfahren, allgemeine 
Partitionsverfahren, Clusterverfahren, Assoziationsregelngeneratoren und 
Korrelationsverfahren. 

Die Beeinflussung der Arbeitsweise des Optimierers kann dabei unmittelbar erfolgen, 
indem in die Arbeitsweise des Optimierers eingegriffen wird oder mittelbar, indem 
die Daten, welche die Basis fiir die Optimierung bilden, gefiltert werden. 

Nach einer bevorzugten Ausfiihrungsfonn der Erfindung werden Methoden zur 
Beeinflussung des Optimiereres verwendet, durch die der Optimierer und/oder der 
Optimierungsprozess „getuned" werden. Zu solchen Methoden geh6ren beispiels- 
weise Untergruppensuchverfahren oder Korrelationsanalysen oder Attributstatistiken 
bei Regelgeneratoren. 

Nach einer weiteren bevorzugten Ausfulirungsform der Erfindung sind weitere Meta- 
Layer vorgesehen, die den jeweils vorhergehenden Meta-Layer verbessem oder in 
den oder die vorhergehenden Meta-Layer und/oder zusatzlich direkt in den Black- 
Box-Optimierungsprozess der ersten Ebene eingreifen. 



neuronale Netze, 



Nach einer weiteren bevorzugten Ausfuhrungsfonn der Erfindung konnen in jedem 
Optimierungsschritt die Eingriffspositionen in den ursprunglichen Optimierungs- 
prozess und die in dem oder den Meta-Layem eingesetzten Methoden oder Kombi- 
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nationen von Methoden variiert werden. Die Auswahl geeigneter Methoden zur 
Generierung optimaler Regeln kann dabei automatisch erfolgen. 

Nach einer bevorzugten Ausfiihrungsform der Erfindung erfolgt die Beeinflussung 
des Optimierers durch eine Neubewertung der Versuchsdaten. Beispielsweise konnen 
die Versuchsdaten selbst bereits eine Auswertung beinhalten, indem entsprechende 
Daten, wie zum Beispiel die Ausbeute unmittelbar experimentell ennittelt werden. In 
diesem Fall kann die Neubewertung durch Filterung der Ausbeute-Daten erfolgen, 
zum Beispiel indem besonders gute Ausbeuten durch die Datenfilterung starker 
gewichtet und besonders schlechte Ausbeuten durch die Datenfilterung schwScher 
gewichtet werden. Durch diese Art der Datenfilterung lasst sich eine schnellere 
Konvergenz des Versuchsablaufs erreichen. 

Entsprechend kann auch vorgegangen werden, wenn die Versuchsdaten nicht un- 
mittelbar eine experimentell ermittelte Bewertung beinhalten, sondem die Bewertung 
erst durch dem Experiment nachgeordnete Berechnimgen ennittelt wird. In diesem 
Fall werden nicht experimentell ermittelte Daten, sondern durch Berechnung 
ermittelte Bewertungen gefiltert oder gewichtet. 

Die Art und Weise der Filterung ergibt sich dabei durch Regeln oder andere 
Zusammenhange, die aufgrund eines Analyseverfahrens der Versuchsdaten, bei- 
spielsweise mittejs neuronalen Netzen oder Data Mining Verfahren oder anderen 
Verfahren aufgefunden wurden. 

Nach einer weiteren bevorzugten Ausfuhrungsform erfolgt die Beeinflussung des 
Optimierers durch eine Verkleinerung, VergroBerung und/oder Verschiebung des 
Versuchsraums. 

Nach einer weiteren bevorzugten Ausfuhrungsform erfolgt die Filterung durch 
Vorselektion und/oder Gewichtung der Versuchsdaten. Besonders „schlechte" Ver- 
suchsdaten, das heiflt, solche Versuchsdaten, die von, beispielsweise einem Regel- 
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generator, als ungeeignet erkaunt worden sind, werden vofselektiert und aus dem 
Versuchsraum eliminiert. Ferner konnen auch gauze Spalten oder Zeilen aus der 
Versuchsdatenmatrix eliminiert werden, wenn die entsprechenden Parameter von 
dem Regelgenerator als nicht relevant erkannt worden sind. Hierdurch wird der 
Versuchsraum verkleinert, was den Gesamtaufwand erheblich verringert. 

Eine Gewichtung der Versuchsdaten kann dadurch erfolgen, dass als besonders 
relevant erkannte Versuchsdaten in der Versuchsdatenmatrix ein oder .mehrfach 
dupliziert werden. Alternativ kann ein Gewichtungskoeffizient eingefiihrt werden. 

Nach einer weiteren bevorzugten Ausfuhrungsform der Erfindung beinhaltet der 
Black-Box-Optimierer sogenannte Kemmodule oder Kernoperatoren, sowie ein 
Modul zur Selektion neuer Versuchspunkte. Die Beeinflussung der Arbeitsweise des 
Optimierers erfolgt dann durch eine Beeinflussung des oder der Kemmodule 
und/oder des Moduls zur Selektion neuer Versuchspunkte basierend auf Zusammen- 
hangen, die zum Beispiel von einem Regelgenerator erkannt worden sind. 

Im weiteren werden bevorzugte AusfQhrungsformen der Erfindung mit Bezugnahme 
auf die Zeichnungen naher erlautert. Es zeigen: 

Figur 1 ein Blockdiagramm zur Darstellung eines aus dem Stand der Technik 



bekannten Versuchsplanungssystems, 



Figur 2 



ein Blockdiagramm einer Ausfiihrungsform eines erfindungsgemaBen 
Versuchsplanungssystems, 



Figxor 3 



ein Blockdiagramm einer Ausfuhrungsform des erfindungsgemaBen 
Versuchsplanungssystems mit einer Neubewertung der Versuchsdaten, 
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Figur 4 



eine Ausfiihrungsform des erfindungsgemaflen Versuchsplanungs- 
systems mit einer Vorselektion und/oder Gewichtung der Versuchs- 
daten, 



Figur 5 



eine Ausfiihrungsform des erfindungsgemaflen Versuchsplanungs- 
systems mit einer Beeinflussung der Selektion neuer Versuchspunkte 
des Optimierers, 



Figur 6 



eine Ausfiihrungsform des erfindungsgemaflen Versuchsplanungs- 
systems mit einer Beeinflussung des oder der Kernmodule des 
Optimierers. 



Das Versuchsplanungssystem der Figur 2 basiert auf einer kombinatorischen Library 
5, die sich aufgrund der durch einen Versuchsraum gegebenen Rahmenbedingungen 
ergibt. Aus dieser kombinatorischen Library 5 werden durch einen Optimierer 6 ein 
oder mehrere Versuche ausgewahlt, die dann in einem Versuchsaufbau 7 beispiels- 
weise mittels eines High-Throughput-Screening oder High-Speed-Experimentation 
Versuchsverfahren durchgefiihrt werden. Die entsprechenden Versuchsdaten werden 
in Form einer Datei 8 ausgegeben. 

Fur den Optimierer 6 ist in dem Versuchsplanungssystem eine Meta-Schicht 9 
vorgesehen. Die Meta-Schicht 9 dient zur Beeinflussung des Optimierers 6 unter 
Beriicksichtigung von a priori bekannten Wissen oder von wahrend der Versuchs- 
durchfuhrung hinzugewonnenem Wissen. Wissen, zum Beispiel in Form von Regeln 
oder in Form von trainierten neuronalen Netzen kann dabei fortlaufend durch die 
Auswertung von Dateien 8 hinzugewonnen werden. 

Die Meta-Schicht 9 erganzt also den datengetriebenen Optimierer 6 durch zusatz- 
liches Wissen, urn eine Konvergenz der Versuchsreihe zu beschleunigen. Durch die 
Meta-Schicht 9 lSsst sich also die Konvergenzgeschwindigkeit eines Black-Box 
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Optimierungsverfahrens, welches in dem Optimierer 6 realisiert ist, durch Integration 
von Vorwissen und/oder Regelstrukturen verbessern. 

Diese Integration kann anf verschiedene Arten und Weisen erfolgen, wie zum 
Beispiel durch: 

A Informationsgestiitzte Zusatzselektion der Testensembles, d.h. Einschrankung 

der zu priifenden kombinatorischen Library durch die mit Datamining 

gefundenen Regeln und kein Eingriff in den Optmierer 
B gezielte Gewichtung der Optimierungsschritte in Richtung von als optimal 

identifizierten Librarybereichen, d. h. Eingriff in das Suchverfahren des 

Optimierers 

C Tuning der Selektionsregeln der Black-Box-Optimierungsverfahren, d. h. 
direkter Eingriff in das Bewertungsverfahrens des Optimierers oder Modi- 
fikation der BewertungsgroBen vor Eingang in den Optimierer 

Die Eingriffsformen A, B und C konnen grundsatzlich auch in {Combination erfolgen, 
d.h. es konnen bei einem Optimierungsschritt auch Eingriffe bei A und B, B und C J( 
A und C oder A und B und C erfolgen. Von Optimierungschritt zu Optimie- 
rungschritt konnen sich die Eingriflfspositionen und Eingriffskombinationen sowie 
die im Metalayer verwendeten Methoden andern. Die Eingriffe konnen auch aus 
nachgeordneten Metalayers erfolgen. 

Bei der Optimierung durch statistische Versuchsplanung ist das Vorgehen ahnlich zu 
der Verwendung eines Black-Box-Optimierers, das heiBt auch hier wird in dem 
Optimierungsprozess iiber die Meta-Schicht in einer oder mehreren der oben be- 
schriebenen Formen eingegriffen. Zum Beispiel erfolgt die Integration von Vor- 
wissen, indem bei der Wahl der EinflussgroBen deren Giiltigkeitsbereich und/pder 
zusatzliche Beschrankungen des Gultigkeitsbereichs bei der Kombination von Ein- 
flussgr6i3en einflieBen. 
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Fur die sequentielle statistische Versuchsplanung konnen durch den Einsatz von Data 
Mining Methoden oder anderen oben beschriebenen Methoden weitere Informationen 
iiber Einflussgrofien einflieflen und in die Versuchsplanung integriert werden, das 
heifit nach dem ersten, zweiten n-ten Durchlauf wird jeweils aufgrund der 
zusatzlichen Informationen der Versuchsraum verSndert. 

Die Veranderung erfolgt durch 

Hinzunahme oder Entfernung von Einflussgrofien 

Veranderung der Giiltigkeitsbereiche der einzelnen oder kombinierten Ein- 
flussgroflen 

Kombination aus a) und b). 

Von besonderem Vorteil ist dabei, dass „klassische" aus dem Stand der Technik an 
sich bekannte Versuchsplanungsverfahren fur einen Black-Box - oder einen statisti- 
schen Optimierer 6 weiter benutzt werden konnen; diese Versuchsplanungsverfahren 
werden durch die vorliegende Erfindung verbessert, indem durch die Beriick- 
sichtigung von Vorwissen oder wahrend des Versuchsablaufs hinzu gewonnenem 
Wissen das Verfahren schneller oder iiberhaupt kontergiert. 

Insbesondere wird die Konvergenzgeschwindigkeit durch das erfindungsgemafle 
„Tuning" beim Optimieren der Versuchsplanung fur Katalysatoren, Wirkstoffe oder 
Materialien oder Reaktionsbedingungen deutlich erhoht. Ein weiterer Vorteil ist, dass 
sich die Anzahl der Versuche bei gleicher Ergebniserwartung reduzieren lasst, womit 
ein geringerer Material- und Zeitaufwand und eine bessere Ausnutzung der Anlagen 
erzielbar ist. 

Von besonderem Vorteil ist ferner, dass durch die Integration des Vorwissens f kein 
Verlust von Forschungsinvestitionen beim Einsatz von HSE- oder HTS- 
Technologien oder bei einem kombinatorischen Vorgehen gegeben ist. 




a) 
b) 

c) 
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Die Figur 3 zeigt eine Ausfuhrungsform des Versuchsplanungssystems, bei der eine 



In dem Versuchsaufbau 7 werden ein oder mehrere zuvor aus der kombinatorischen 
Library 5 (vgl. Figur 2) ausgewShlte Versuche durchgefiihrt. Die entsprechenden 
Versuchsdaten werden in Form der Datei 8 ausgegeben. Die Versuchsdaten konnen 
dabei selbst bereits eine Bewertung beinhalten, wenn entsprechende Daten unmittel- 
bar experimentell erfasst werden konnen. Ein Beispiel hierfur ist die experimentelle 
Bestimmung der Ausbeute. Die Ausbeute ist gleichzeitig eine Bewertung der 
durchgefiihrten Versuche. 

In anderen Fallen kann es erforderlich sein 3 zusatzlich eine Bewertung der Ver- 
suchsdaten in einem Bewertungsmodul 10 vorzunehmen. Beispielsweise beinhaltet 
das Bewertungsmodul 10 eine Berechnungsvorschrift fur die Berechnung einer 
Bewertung basierend auf einen oder mehreren der Versuchsdaten. 

Die Datei 8 und gegebenenfalls das Ergebnis des Bewertungsmoduls 10 werden in 
die Meta-Schicht 9 eingegeben. Die Meta-Schicht 9 beinhaltet ein Modul 11 zur 
Realisierung eines Data Mining (DM) Algorithmus, eines neuronalen Netzes oder 
eine Hybridverfahrens oder eines anderen geeigneten Datenanalyseverfahrens. 

Durch die Anwendung eines solchen Verfahrens werden Regeln generiert, das heiBt 
zusatzliche Informationen und Erkenntnisse zum VerstSndnis des in den Versuchen 
betrachteten chemischen Systems. Das Modul 1 1 hat also die Funktion eines Regel- 
generators. Entsprechende Regeln und Nebenbedingungen werden in dem Modul 12 
der Meta-Schicht 9 formuliert. 

Basierend auf diesen Regeln und Nebenbedingungen erfolgt dann gegebenenfalls in 
dem Modul 13 eine Neubewertung des oder der Versuche. Dies kann so erfolgen, 
dass ein Neuberwertung eines Versuchs nur dann vorgenommen wird, sofern ein 
vorgegebener Schwellwert ilberschritten wird. Altemativ kann auch der Benutzer 



Neubewertung der Versuche erfolgt. 
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eingreifen, urn die Neubewertung zu aktivieren oder zu deaktivieren. Die Neube- 
wertung kann darin bestehen, dass als „schlecht" erkannte Versuche eine ver- 
schlechterte Bewertung erhalten und als „gut" erkannte Versuche eine verbesserte 
Bewertung. 

Basierend auf der Datei 8, die gegebenenfalls neu bewertete Versuchsdaten 
beinhaltet, erstellt dann der Black-Box-Optimierer 6 einen weiteren Versuchsplan 1 8. 
Die entsprechenden Versuche werden dann wiederum in dem Versuchsaufbau 
durchgefuhrt und so weiter. 

Die Figur 4 zeigt eine alternative Ausfuhrungsform, bei der die Filterung nicht durch 
eine Neubewertung der Versuchsdaten, sondern durch eine Vorselektion und/oder 
Gewichtung erfolgt. Das Versuchsplanungssystem der Figur 4 ist dabei prinzipiell 
gleich aufgebaut, wie das der Figur 3, wobei an Stelle des.Moduls 13 ein Modul 15 
ftir die Vorselektion und/oder Gewichtung verwendet wird. 

Die Versuchsdaten werden also nicht neu oder anders bewertet, sondern es kSnnen 
mittels des Moduls 15 auf der Grundlage der ermittelten Regeln beispielsweise 
Versuche ausgeblendet oder starker oder schw&cher gewichtet werden. Dadurch 
fmdet eine Vorselektion statt, ohne dass die Bewertung der Versuche selbst geandert 
wird. 

Die Figur 5 zeigt eine weitere Ausfiihrungsform des erfindungsgemaBen Versuchs- 
planungssy stems. Die Ausfuhrungsform der Figur 5 unterscheidet sich von den 
Ausfuhrungsformen der Figur 3 und der Figur 4 dadurch, dass unmittelbar in den 
Optimierer 6 eingegriffen wird. 

Der Optimierer beinhaltet in dieser Ausfuhrungsform ein oder mehrere Kernmqdule 
16, das heiBt sogenannte Kemoperatbren. Femer beinhaltet der Optimierer 6 ein 
Modul 17 zur Selektion neuer Versuchspunkte. Die Arbeitsweise des Moduls 17 wird 
durch die von dem Modul 12 formulierten Regeln und Nebenbedingungen beein- 
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flusst, das heiBt es werden beispielsweise von dem Modul 1 7 selektierte neue 
Versuchspunkte verworfen, so dass eine Ruckkopplung von dem Modul 17 zu dem 
Kernmodul 16 erfolgt, urn entsprechende weitere Versuchspunkte als Ersatz fur die 
verworfenen Versuchspunkte zu selektieren. 

Nach Ablauf der eigentlichen Optimierung in dem oder den Keramodulen 16, werden 
also durch das Modul 17 neue Versuche bzw. Versuchspunkte zur Optimierung der 
ZielgroBen des betrachteten Systems vorgeschlagen. Bei diesem System kann es sich 
beispielsweise um ein chemisches, biotechnologisches, biologisches, enzymatisches 
System handeln. 

Auf der Grundlage der iiber den Regelgenerator, das heiBt die Meta-Schicht 9 
erarbeiteten Regeln werden Versuche, die den generierten Regeln widersprechen, 
aussortiert und gegebenenfalls durch neue Versuche iiber den Optimierer, das heiBt, 
das oder die Kernmodule 16, erganzt. 

Das Aussortieren kann dabei streng, das heiflt vollst&ndig, oder weich, mit einer 
gewissen Gewichtimg erfolgen. Auch die neu geplanten Versuche mtissen dann 
wiederum durch das Modul 17. Auf diese Weise wird erreicht, dass Informationen, 
die von dem oder den Kemmodulen 16 nicht berucksichtigt werden oder beriick- 
sichtigt werden konnen, nachtraglich in die Versuchsplanung einflieflen. 

Alternativ kann ein separates Modul 18 dem Optimierer 6 nachgeschaltet sein, um 
die Nachselektion der von dem Modul 1 7 selektierten neuen Versuchspunkte vorzu- 
nehmen. Dies entspricht einem Test in dem Modul 18, ob die neuen Versuchspunkte, 
die von dem Modul 17 vorgeschlagen worden sind, regelkonform sind. Wenn bei 
diesem Test Versuchspunkte eliminiert werden, ist wiederum ein Ruckfluss erforder- 
lich, um entsprechende alternative neue Versuchspunkte zu planen. f 

Die Ausfuhrungsform des Versuchsplanxmgssystems der Figur 6 entspricht dem 
Versuchsplanungssystem der Figur 5 mit dem Unterschied, dass nicht die Arbeits- 
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weise des Moduls 17 beeinflusst wird oder eine Nachselektion in dem Modul 18 
stattfindet, sondern dass unmittelbar die Arbeitsweise des oder der Kenunodule 16 
des Optimierers 6 beeinflusst wird. 

Beispiele fur Kemoperatoren von neuronalen Netzen sind die Art und Axizahl von 
Einflussgrdfien sowie die Gewichtung einzelner Datenpunkte. 

Beispiele fur Kemoperatoren von evolutionaren Algorithmen am Beispiel des 
genetischen Algorithmus sind der Selektionsoperator (Auswahl einer neuen Reihe 
von Versuchen), der Mutationsoperator und der Cross-Over Operator. 

Die Regeln und Informationen, die durch den Regelgenerator erzeugt werden, werden 
in dem Algorithmus des Optimierers selbst bei der Ausfuhrung berucksichtigt. 

Fiir Optimierer, die mit Neuronalen Netzen gekoppelt sind, bedeutet dies, dass durch 
die Regeln der Versuchsraum eingeschrankt oder die Datensatze in besonderer Weise 
gewichtet werden. 

Bei evolutionarer Algorithmus-Optimierern werden die zusStzlichen Informationen 
in einem oder mehreren Kemoperatoren berucksichtigt. Dies bedeutet, dass z.B. 
bestimmte Kreuzungen, Selektionen oder Mutationen verboten oder bevorzugt durch- 
gefiihrt werden. 

Fiir beide Optimierertypen hat dies zur Folge, dass bei einer vollstandigen Automati- 
sierung des Workflows uber Schnittstellen in die entsprechenden Programmteile des 
Optimierers eingegriffen wird oder die Informationen uber manuelle oder programm- 
gesteuerte Anderungen von Optimierungsparametern in den Optimierer einflieBen. 

Die Ausfuhrungsformen der Figuren 3 bis 6 kdnnen miteinander kombiniert werden, 
das heiflt es kfinnen mehrere Regelgeneratoren, das heiflt Meta-Schichten 9 unab- 
hangig voneinander in den Optimierungsablauf eingebunden sein. Diese Regeln 
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konnen mit verschiederien, unabhangig voneinander eingesetzten Verfahren und 
Methoden erzeugt und in dem Modul 12 zusammengefUhrt werden. 

Die Berttcksichtigung der Regeln, die von dem oder den Regelgeneratoren der Meta- 
Schichten 9 formuliert worden sind, erfolgt entweder automatisch tiber definierte 
Schnittstellen und unter Einhaltung vorgegebener Schwellwerte oder durch manuelle 
Fonnulierung von Regeln fur den Bereich des Optimierers, in den der Regelgenerator 
eingreift. 
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Patentanspruche 

1. Verfahren zur Planung von Versuchen zur Erreichung eines Optunierungs- 
zieles mit folgenden Schritten: 

A) Auswahl von zumindest einem ersten Versuch aus einem Versuchs- 
raum durch einen datengetriebenen Optimierer in einer Rechner- 
einheit, 

B) Eingabe von experimentell ennittelten Versuchsdaten des ersten Ver- 
suchs, in mindestens eine Meta-Schicht in eine Rechnereinheit, 

C) Verwendung mindestens einer Meta-Schicht fur die Auswertung der 
Versuchsdaten, 

D) Eingabe der experimentell ennittelten Versuchsdaten des ersten Ver- 
suchs in den datengetriebenen Optimierer, 

E) Beeinflussung des datengetriebenen Optimierers durch das Ergebnis 
der Auswertung in der Meta-Schicht und Priifung der Zielerreichung, 

F) Auswahl von zumindest einem zweiten Versuch aus dem Versuchs- 
raum durch den datengetriebenen Optimierer, 

G) Wiederholung der Schritte B) bis E) fur die Daten des zweiten 
Versuchs 



und 
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H) Abbruch der Hexation bei Zielerreichung oder Wiederholung der 
Schritte A) bis F) fiir mindestens einen dritten oder weitere Versuche 
bis zur Zielerreichung. 

2. Verfahren nach Anspruch 1, wobei der Versuchsraum vor der Auswahl von 
dem zumindest einem zweiten Versuch durch den Optimierer und/oder durch 
die Meta-Schicht verandert word, insbesondere beschrSnkt, verschoben oder 
vergrofiert wird. 

3. Verfahren nach Anspruch 1 oder 2, wobei die Meta-Schicht ein neitrohales 
Netz und/oder ein Hybridmodell und/oder ein rigoroses Modell und/oder eine 
oder mehrere Data Mining Methoden beinhaltet. 

4. Verfahren nach Anspruch 1, 2 oder 3, wobei zur Ermittlung der experi- 
mentellen Versuchsdaten Versuche aus dem Bereich der WirkstofEforschung, 
Materialforschung, Katalyseforschung, Biotechnologie und/oder Optimierung 
von Reaktionsbedingenungen durchgefuhrt werden. 

5. Verfahren nach einem der vorhergehenden Anspriiche 1 bis 4, wobei die 
Beeinflussung des datengetriebenen Optimierers durch Filterung der Ver- 
suchsdaten basierend auf der Auswertung erfolgt. 

6. Verfahren nach Anspruch 5, wobei die Filterung durch eine Neubewertung 
der Versuchsdaten erfolgt. 

7. Verfahren nach Anspruch 5, wobei die Filterung durch Gewichtung und/oder 
Vorselektion der Versuchsdaten erfolgt. 

t 

8. Verfahren nach Anspruch 7, wobei die Gewichtung durch einen 
Gewichtungsparameter oder durch ein- oder mehrfache Duplizierung der 
Versuchsdaten erfolgt. 
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9. Verfahren nach einem der vorhergehenden Anspriiche 1 bis 8, wobei der 
Optimierer mindestens ein Kernmodul und ein Modul zur Selektion neuer 
Versuchspunkte aufweist. 

10. Verfahren nach Anspruch 9, wobei die Beeinflussung des datengetriebenen 
Optimierers durch Beeinflussung des Moduls zur Selektion neuer Versuchs- 
punkte erfolgt. 

11. Verfahren nach Anspruch 10, wobei die Beeinflussung des Moduls zur 
Selektion neuef Versuchspunkte bei Uberschreiten eines Schwellwerts 
und/oder durch Benutzervorgaben erfolgt. 

12. Verfahren nach Anspruch 9, wobei die Beeinflussung des datengetriebenen 
Optimierers durch Beeinflussung des Kernmoduls erfolgt. 

13. Verfahren nach Anspruch 12, wobei die Beeinflussung des Kernmoduls bei 
Uberschreiten eines Schwellwerts und/oder durch Benutzervorgaben erfolgt. 

14. Computerprogramrnprodukt zur Durchfuhrung eines Verfahrens nach einem 
der vorhergehenden Anspriiche 1 bis 13. 

15. Computersystem zur Planung von Versuchen mit: 

A. einem datengetriebenen Optimierer (6) zur Auswahl von zurnindest 
einem ersten Versuch aus einem Versuchsraum (1), 

B. einer Meta-Schicht (9) fur den datengetriebenen Optimierer fur die 
Auswertung von fur den ersten Versuch experimentell ermittelten 
Versuchsdaten, wobei die Meta-Schicht ein neuronales Netz und/oder 
ein Hybridmodell und/oder ein rigoroses Modell und/oder Data 
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Mining Methoden beinhaltet, und wobei die Meta-Schicht fur die 
Beeinflussung des datengetriebenen Optimierers basierend auf dem 
Ergebnis der Auswertung ausgebildet ist. 

16. Computersystem nach Anspruch 15, mit Mitteln zur Filterung (13; 15) der 
Versuchsdaten basierend auf der Auswertung. 

17. Computersystem nach Anspruch 16, wobei die Mittel zur Filterung zur 
Neubewertung der Versuchsdaten ausgebildet sind. 

18. Computersystem nach Anspruch 16, wobei die Mittel zur Filterung zur 
Gewichtung und/oder Vorselektion der Versuchsdaten ausgebildet sind. 

19. Computersystem nach einem der vorhergehenden Anspruche 15 bis 18, wobei 
der Optimierer zumindest ein Kernmodul (16) und ein Modul (17) zur 
Selektion neuer Versuchspunkte aufweist. 

20. Computersystem nach Anspruch 19, wobei die Meta-Schicht zur Beein- 
flussung des Moduls zur Selektion neuer Versuchspunkte ausgebildet ist. 



21. 



Computersystem nach Anspruch 19, wobei die Meta-Schicht zur Beein- 
flussung der Kemmodule ausgebildet ist 
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network and/or a hybrid model and/or a rigorous model and/or a data mining method, D input of the experiment data determined by 
experimentation for the first experiment into the data-driven optimizer, E influencing of the data-driven optimizer by the result of 
the evaluation, F selection of at least one second experiment from the experiment ranee bv the data-driven optimizer 



(84) Bcstimmungsstaaten (regional): ARIPO-Patent (GH, 
GM, KE, LS, MW, MZ, SD, SL, SZ, TZ, UG, ZM, ZW), 

- eurasisches Patent (AM, AZ, BY, KG, KZ, MD, RU, TJ, 
.TM), europaisches Patent (AT, BE, BG, CH, CY, CZ, DE* 
DK, EE, ES, FI, FR, GB, GR, HU, IE, IT, LU, MC, NL,' 
PT, RO, SE, SI, SK, TR), OAPI-Patent (BF, BJ, CF, CG, 
CI, CM, GA, GN, GQ, GW, ML, MR, NE, SN, TD, TG). ' 

ErkJarung gemafi Rcgel 4.17: 

— hinsichtlich der Berechtigung des Anmelders. ein Patent zu 
beantragen utid Z u erhalien (Regel 4.17 Ziffer ii) fur die 
folgenden Besiimmungssiaaten AE, AG, AL AM AT, AU. 
AZ. BA. BB, BG. BR. BY, BZ, CA, CH, CN. CO. CR f CU. 
CZ, DE, DK, DM. DZ. EC. EE, ES, Fl, GB, GD, GE GH 
GM. HR, HU, ID, IL, IN, IS, JP, KE. KG, KP, KR. KZ, LC 
LK, LR, LS, LT, LU. L\< MA, MD, MG, MK, MN, MW, MX 
MZ, NO, NZ OM t PH, PL PT, RO, RU, SC, SD, SE, SG SK 
SL. TJ, TM, TN, TR, TT. TZ, UA, UG, UZ. VQ VN, YU ZA 



ZM, ZW, ARIPO-Patent (GH, GM, KE, LS, MW, MZ, SD 
SL, SZ, TZ, UG, ZM. ZW), eurasisches Patent (AM AZ, BY 
KG, KZ, MD, RU, TJ, TM), europaisches Patent '(AT BE 
BG, CH, CY, CZ DE. DK, EE, ES, FI, FR, GB GR HU 
IE. IT, LU, MC, NL, PT. RO, SE, SI, SK, TR). OAPI-Patent 
(BF, BJ. CF, CG, CI, CM, GA. GN, GQ, GW, ML. MR NE 
SN, TD, TG) ' ' 

Veroflentlicht: 

mil internal ionalem Recherchenbericht 

(88) Veroflentlicbungsdatuxn des internationalen 

Recherchenberichts: 8 . Januar 20Q4 

Zur ErUarung der Zweibuchstaben- Codes und der anderen Ab- 
kurzungen wird auf die Erkldrungen ("Guidance Notes on Co- 
des and Abbreviations") am Anfangjeder reguldren Ausgabe der 
PCT-Gazette verwiesen. 



JO 
in 

i 



CD 

o 



"SS: ZXZSZ ^S^^i * - »- Me- 



ituiiiii«jiiniiw*<« 



INTE^^ONAL SEARCH REPORT 




lnlennatl& application No 

PC7/EP 03/03424 



A. CLASSIFICATION OF SUBJECT MATTER 

IPC 7 G05B13/02 G05B15/02 




According lo International Paleni Classification (IPC) or lo both national classification and IPC 



B. FIELDS SEARCHED 



Minimum documentation searched (classification system followed by class if ical ion symbols) 

IPC 7 GOBB G06F G07C 



Documentation searched other than minimum documentation lo the extent that such iocuments are included in ihe fields searched 



Electronic data base consulted during Ihe international search (name of data base and. where practical, search terms used) 

EPO-Internal 



C. DOCUMENTS CONSIDERED TO BE RELEVANT 



Category 0 Cilation of document, with indication, where appropriate, of the relevant passages 



US 5 253 331 A (LORENZEN THOMAS J ET AL) 

12 October 1993 (1993-10-12) 

column 2, line 26 -column 7, line 20 

WO 00 51045 A (STEWART LISA E) 
31 August 2000 (2000-08-31) 
claim 1 



US 5 621 665 A (GHOSH SAKI P 
15 April 1997 (1997-04-15) 
claim 1 



ET AL) 



Relevant to claim No. 
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Further documents are listed in the continuation of box C. 
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Patent family members are listed tn annex. 



* Special categories of ched documents : 

"A* document definhg the genera! state of the art which is not 

considered to be of particular relevance 
*E' earlier document but published on or after me international 

filing date 

"L" document which may throw doubts on priority claim(s) or 
which is crted to establish the publication dale of another 
citation or other special reason (as specified) 

*0* document referring lo an oral disclosure, use. exhibition or 
ofher means 

•p* document published prior to the international liling date but 
later than the priority date claimed 



"T later document published after Ihe inlemaiional liling date 
or priority date and not in conflict with the application but 
crted lo understand Ihe principle or theory underlying the 
invention 

•X" document ol particular relevance: the claimed invention 
cannot be considered novel or cannot be considered lo 
involve an inventive step when the document is laken alone 

•V document of particular relevance: the claimed invention 

cannoi be considered lo involve an inventrve slep when the 
document is combined with one or more other such docu- 
ments, such combination being obvious to a person skilled 
in ihe art. t 
document member of the same patent family 
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date 



US 


5253331 


A 


12- 


10-1993 


NONE 










wo 


0051045 


A 


31- 
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Nach der Internal beaten PaieniktassiCfcation (IPK) oder nach der nalionalen Klasstfikation und der IPK 
B. RECHERCHIERTE GEBIETE 



Red>erchierter Mrndeslprufsiofl (Klassilikalionssysiem und Klassilikationssymbole ) 

IPK 7 G05B G06F G07C 



Recherchierle aber n.cht 2um Mindeslprutstoft gehorende Verdnenllichungen. sowven diese unier d* recherchierten Gebieie 



la lien 



Wahrend der intemalionalen Recherche konsutherle etektronische Dalenbank (Name der Dalenbank und evil, verwendete Suchbegnhe) 

EPO-Internal 
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Kateoorie« Bezeichnung der Veroftentlichung. soweit erforderlicfi unler Angabe der in Belrachl kommenden Teite 



US 5 253 331 A (LORENZEN THOMAS J ET AL) 

12. Oktober 1993 (1993-10-12) 

Spalte 2, Zeile 26 -Spalte 7, Zeile 20 

WO 00 51045 A (STEWART LISA E) 
31. August 2000 (2000-08-31) 
Anspruch 1 

US 5 621 665 A (GHOSH SAKI P ET AL) 
15. April 1997 (1997-04-15) 
Anspruch 1 
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entnehmen 



Siehe Anhang PatentlamiJie 



• Besondere Kaiegohen von angegebenen Veroftentlichungen 
A* Verdttenllichung. die den alkjemeinen Stand der Technik definiert 
aber nichl als besonders bedeuisam anzusehen ist 

E' aneres Dokument. das jedoch erst am oder nach dem inlernalionalen 
An me k3e datum veroHenllichi worden csl 

V Veronenilichung. die geeignel tsl. einen Priorilaisanspruch zweifethah er- 
schetnen zu iassen. oder durch die das Veroflentlichungsdatum einer 
anderen im Recherchenbericht genannten Veroftentlichung belegl werden 
soli oder die aus einem anderen besonderen Grund anoeoeben isl fwie 
ausgelQhri) K 

O* Verottenllichurig.diesichauteinemundiichg Ottenbarung 

erne Benuizung. eine Ausstetlung oder andere Maftnahmen bezieht 
veronenilichung. d»e vor dem intemalionalen Anmelde datum aber nach 
dem beanspruchlen Prioritatsdatum veroflenllichl worden isl* 



•T' Spatere Verpflentlicbung, die nach dem inlernationalen Anrneldedatum 
oder dem Pnoriatsdatum veroflenllicht worden ist und mil der 
AnmeWung nichl kolWiert. sondern nur zum Verslandnis des der 
Ertindung zugrundeliegenden Prinzips Oder der ihr zugrundeliegenden 
T heone angegeben isl 

•X' VerdtfentKchung von besonderer Bedeutung: die beanspruchle Ertindunq 
kann allem aulgrund dieser Veronenilichung nicht ate neu oder auf 
erfindenscher Taiigkeit beruhend betrachtel werden 

•Y" Veronenilichung von besonderer Bedeulung; die beanspruchle Emndung 
kann nicht als aul erfinderischer Tatigkeit beruhend belrachiel 
werden. wenn die Veroftentlichung mil einer oder mehreren anderen 
Veroftentlichungen dieser Kalegorie in Verbindung gebrachl wird und 
diese Verbindung fur einen Fachmann naheliegend ist ' 
Veronenilichung. die Mriglied derselben Patenflamilie tsl 
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